inpainting後にface swapすることで一貫性のある表情差分を作る
https://gyazo.com/b4b8ea82346666de5c9821e56c985086
アイデア元様 : Found a cool little trick to change expressions using Reactor and Inpainting.
顔の部分をマスクして適当な表情のプロンプトを入れてinpainting
ip-adapter-plus-face等を使っても別人のようになってしまう
新しい表情の画像に対して、元の画像でface swapすることで一貫性を保持したまま表情だけ変更する
face swap(ReActor)は人物を入れ替えても表情は保持されるという特性？を使った
ComfyUI_workflow
https://gyazo.com/08419b372bfaaa50c17aa720bcdd4c10
inpainting+ReActor.json
ちょっと複雑にしすぎたかもしれないnomadoor.icon
後でface swapするとはいえ、あまりに顔が違いすぎるとうまくいかないのでip-adapter-plus-faceを使って多少似せる
redditの方法では使ってなかった
マスクにHQ-SAMを使ったけれど目や口ごとに細かく手で塗ったほうが良いかもしれない
単純なinpaintのかわりにControlNet inpaintを使っている